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摘要 : 我 国明 安 图 射电 频谱 日 像 仪 (Mingantu Ultrawide SpEctral Radio Heliograph, MUSER) 
已 经 完成 所 有 的 硬件 设备 安装 与 调试 ， 即 将 进入 常规 观测 。 为 有 效 地 保证 观测 数据 的 可 用 
项 目 组 购置 了 Vantage Pro 自动 气象 站 ， 用 以 实时 监控 观测 地 的 气象 条 件 变化 。 首 先 介 
绍 了 MUSER 项 目的 基本 情况 ， 论 述 了 在 项 目 中 气象 条 件 的 应 用 场景 及 在 数据 处 理 时 对 数据 
Ha 隆 可 能 造成 的 影响 ; 详细 介绍 了 Vantage Pro 气象 站 的 数据 采集 格式 、 数 据 交 换 格 式 以 
及 囊 行 通信 协议 ; 介绍 了 在 气象 数据 的 存储 方式 ; 最 后 给 出 了 构建 气象 数据 服务 、 数 据 归档 
和 高 效 查 询 的 方法 。 可 以 应 用 在 望远镜 自动 气象 监控 和 数据 处 理 方面 ， 也 可 以 为 选 址 的 自动 
气象 监测 提供 参考 。 
关键 词 : Vantage Pro; MUSER; 气象 数据 采集 ; 数据 合并 ; 键 值 数 据 库 
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1 研究 背景 


为 了 推动 太阳 射电 观测 技术 的 发 展 ， 我 国 天 文学 家 提出 400 MHz~ 15 GHz 范围 内 的 厘米 -分 米 波 
日 像 仪 (Chinese Spectral Radio Heliograph, CSRH)'" ， 现 已 命名 为 MUSER ， 首 次 在 多 波段 上 实现 同时 
以 高 空间 、 高 时 间 和 高 频率 分 辨 率 观 测 太阳 活动 的 动力 学 性 质 ， 对 太阳 从 色 球 层 到 高 日 蛙 的 广大 区 域 
进行 高 分 辩 率 的 三 维 动态 成 像 观测 ， 填 补 国际 科学 界 在 太阳 粮 班 、 日 冕 物质 抛射 等 爆发 活动 的 能 量 初 
始 释放 区 高 分 辨 射电 成 像 观测 的 空白 ， 揭 示 太 阳 剧 烈 活动 的 起 源 和 发 生 规律 ， 并 取得 一 批 原创 性 研究 
成 果 ， 大 大 提升 我 国 在 太阳 活动 预报 方面 的 能 力 ， 为 航天 航空 、 卫 星 通讯 和 国防 建设 等 提供 有 效 保 
障 ， 对 推动 学 科 发 展 及 相关 高 技术 领域 的 建设 具有 重要 作用 。 MUSER 最 终 选 址 在 内 蒙古 锡 林 格 勒 明 
ERAH, 

数据 处 理 过程 中 ， 对 观测 地 点 的 气象 条 件 有 相应 的 要 求 ; 一 方面 ， 在 生成 UVKITS FITS-IDI 等 
格式 时 ， 有 相应 天 气 的 字段 需要 填 和 人; 男 一 方面 ， 在 低温 、 其 雨 、 冰 雹 等 恶劣 天 气 状况 下 ， 天 线 等 物 
理 情况 有 可 能 发 生变 化 ， 同 时 雄 雨 对 观测 信号 也 有 一 定 的 误差 作用 ， 记 录 这 些 状态 对 后 续 数据 处 理 有 
较 大 的 帮助 

针对 A 动 气 气象 数据 采集 与 归档 的 需要 , 项 目 组 购置 了 美国 戴 维 斯 公司 的 Vantage Pro 自 动 气 象 站 。 
该 气象 站 可 以 实时 采集 日 像 仪 所 在 地 的 气象 条 件 ， 但 不 外 将 数据 存储 到 数据 库 中 ， 也 没有 提供 接口 用 
于 获取 数据 。 而 气象 条 件 如 光照 、 雨 量 、 风 速 、 风 向 、 湿 度 、 温 度 、 雨 量 等 影响 观测 数据 的 有 效 
te es 
理 ， 还 包括 对 历史 数据 的 处 理 ( 如 某 一 个 时 间 的 积分 ) ， 需 要 能 够 查询 历史 的 气象 信息 。 因 此 需要 实 
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时 采集 并 存储 气象 信息 ， 能 提供 快速 查询 历史 气象 信息 。 在 本 文中 ， 自 行 研发 了 一 套 系统 ， 实 现 从 
Vantage Pro 自动 采集 气象 数据 ， 并 把 数据 存 人 数据 库 进 行 自动 归档 为 后 续 检 索 使 用 ， 这 是 日 像 仪 全 
自动 观测 与 后 续 全 自动 数据 处 理 的 重要 组 成 部 分 。 其 中 ， 需 要 解决 Vantage Pro 通信 协议 分 析 、 数 据 
采集 、 数 据 格式 分 析 与 数据 拆 分 、 构 建 气象 数据 服务 、 数 据 合 并 归档 与 检索 等 相关 问题 。 


2 Vantage Pro 气象 站 


Vantage Pro 电子 气象 站 是 美国 戴 维 斯 公司 (Davis Instruments Corp. ) 面向 气象 服务 、 移 动 服务 的 小 
型 气象 站 中， 体积 小 ， 重量 轻功 耗 小 ， 集 成 度 高 ， 安 装 简单 ， 长 期 工作 稳定 可 靠 。 气象 站 由 一 体 
化 传感器 单元 ( Integrated Sensor Suite, ISS), imta ml at ( CONSOLE ) FUI 3€ ait 4K (FE ( Weather Link) 组 
BUT 。 一体 化 传感器 单元 可 使 用 有 线 和 无 线 方式 传输 数据 ， 其 中 有 线 方 式 的 一 体 化 传感器 单元 由 有 
线 电缆 供电 ， 数 据 由 有 线 电 缆 传 送 到 终端 控制 器 ， 电 缆 线 长 度 可 扩展 至 305 m; 无 线 方式 的 一 体 化 传 
感 带 单元 由 太阳 能 供电 ， 数 据 无 线 传送 到 终端 控制 器 ， 距 离 大 约 200~300 m, Vantage Pro 也 是 目前 国 
内 外 天 文 领域 应 用 较 广 的 全 自动 气象 站 之 一 ， 在 远程 自主 观测 等 方面 应 用 较 广 ，MUSER 使 用 有 线 电 
缆 方 式 部 署 一 体 化 传感器 单元 。Vantage Pro 可 以 测量 空气 温度 、 空 气相 对 湿度 、 风 向 、 风 速 、 雨 量 、 
气压 、 太 阳 辐 射 和 紫外 辐射 ， 组 成 8 要 素 电 子 气 象 站 。 还 可 扩展 对 土壤 温度 、 土 壤 湿 度 及 叶 面 湿度 等 
气象 要 素 进行 观测 。 

与 一 般 的 气象 站 不 同 ，Vantage Pro 通过 一 体 化 传感器 单元 接口 板 接收 数据 并 转发 至 终端 控制 央 
或 连接 的 计算 机 中 ， 其 中 温 湿 度 传 感 絮 在 白色 百叶 式 防 辐 射 单 内 ， 翻 斗 式 雨量 计 的 翻斗 在 雨量 简 内 。 
各 传感器 信号 线 均 接 和 人 一 体 化 传感器 单元 接口 板 中 。 无 线 方式 一 体 化 传感器 单元 通过 外 部 所 带 太 阳 能 
板 供电 ， 盒 内 装 有 一 块 3 V 锂电 池 ， 用 于 夜间 及 无 日 照 时 供电 5 。 终 端 控制 器 用 来 在 未 连接 计算 机 单 
独 显 示 气 象 信 息 时 的 状态 。 但 由 于 当前 日 像 仪 采 用 计算 机 实时 采集 ， 因 此 终端 控制 器 并 不 需要 配置 。 
2.1 通信 协议 

Vantage Pro 中 有 线 电缆 的 方式 使 用 串 行 通信 协议 进行 数据 传输 和 命令 控制 ， 即 RS232C 串口 通讯 
协议 标准 。RS232C 串口 通信 协议 包含 8 个 数据 位 、1 个 起 始 位 、1 个 停止 位 、 无 奇偶 校 验 位 。 通 信 协 
议 中 的 波 特 率 设置 为 4800 比特 。 用 RS232C 串口 通信 协议 中 的 DB9(9 F D 型 串口 ) Vantage Pro A 
行 端口 的 命令 格式 表示 如 下 : 

< 参数 名 称 一 十 进 制 数 字 > 

< 参数 名 称 一 十 六 进 制 数 字 > 

< 参数 名 称 一 二 进 制 数字 > 

十 进 制 和 十 六 进 制 数字 可 以 用 ASCII 赫 换 ， 二 进 制 数字 发 送 字符 值 ， 每 个 命令 之 后 紧 跟 一 个 换行 
符 (\n) 。 
2.2 数据 格式 

Vantage Pro 通过 串口 获取 气象 数据 ， 实 际 传送 的 气象 数据 为 99 个 字 节 的 数据 包 ， 如 表 1， 从 1~ 
99 对 数据 包 编 号 ， 提 取 的 数据 用 括号 给 出 注释 ， 插 号 中 逗号 之 前 的 内 容 表 示 字 段 含 义 ， 如 号 之 后 的 
内 容 表示 测量 值 的 单位 。 数 据 包 的 具体 格式 如 表 1。 


3 气象 数据 拆 分 与 归档 


在 应 用 中 ， 将 各 个 一 体 化 传感器 单元 采集 的 气象 因子 数据 通过 RS232C 串口 通信 协议 传 到 数据 接 
收服 务 器 ， 通 过 该 接收 机 上 的 数据 请 求 与 拆 分 程序 将 RS232C 传送 的 气象 因子 数据 包 实 时 拆 分 出 需要 
的 气象 因子 并 归档 到 MySQL 数据 库 和 键 值 数据 库 高 速 缓存 中 。 同 时 数据 合并 程序 自动 合并 同 价值 的 
数据 ， 将 最 新 的 数据 存 到 键 值 数 据 库 中 。 系 统 整 体 结构 如 图 1。 
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串口 数据 的 接收 和 归档 以 驻 留 程序 方式 运行 在 服务 器 上 ， 图 2 显示 了 实时 气象 数据 拆 分 与 处 理 的 
初始 化 流程 。 气 象 因子 的 记录 器 对 象 主要 和 暂时 存储 拆 分 处 理 后 的 气象 数据 ， 和 气象 因子 读 取 器 对 象 负责 
读 取 数据 包 中 记录 的 特定 气象 因子 的 测量 值 。 由 于 Vantage Pro 气象 站 测量 的 气象 因子 值 与 要 归档 值 


的 单位 不 一 致 ， 因 此 也 需要 气象 因子 的 修正 器 对 象 对 测量 的 原始 值 进行 修正 。 
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读 取 所 有 的 EERE I 
传感器 名 字 记录 器 对 象 NS 


建 的 修正 
WR 


气象 数据 归 是 否 到 、 对 气象 因 


档 到 数据 库 数据 包 的 处 理 


图 2 系统 初始 化 流程 图 
Fig.2 The flowchart of the initialization 


3.2 数据 的 拆 分 与 处 理 

系统 初始 化 后 ， 采 集 程序 定时 从 串口 接收 数据 ， 首 先 获 得 采集 时 间 并 转换 为 1970 年 到 现在 的 秒 
数 ， 并 向 Vantage Pro 请 求 一 个 数据 包 ， 接 着 处 理 收 到 的 气象 数据 包 。 采 集 服务 器 上 实时 气象 数据 的 
拆 分 与 处 理 流程 如 图 3。 
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收 到 VantagePro 
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MAY v, 并 将 修 正 后 
的 值 更 新 到 相应 的 
记录 器 对 象 R 


未 修正 


获得 采样 时 间 并 向 VantagePro 请 
转换 成 时 间 秒 数 求 一 个 数据 包 


批量 将 值 归档 
到 数据 库 


读 取 记录 器 中 的 


LA 
合成 SQL 语句 的 记 值 和 时 间 惟 合并 


图 3 数据 包 的 拆 分 处 理 


Fig.3 The procedure of data extracting and processing 


更 新 采样 时 间 
PAL 


图 3 中 时 间 秒 数 的 定义 为 从 1970 年 1 月 1 日 0 时 0 分 0 秒 到 此 时 的 秒 数 。 相 邻 的 两 个 时 间 秒 数 
之 间 相 差 60s， 即 1 min。 数 据 的 采样 周期 也 是 1 min。 时 间 秒 数 用 来 唯一 表示 气象 因子 的 采集 时 间或 
采样 时 间 ， 同 时 也 作为 键 值 数据 库存 储 中 可 分 类 的 集合 中 顺序 属性 (Score) 的 值 。 


3.3 气象 数据 的 存储 R2 数据 表格 式 
在 实际 应 用 中 将 采集 的 气象 数据 保存 到 Table 2 The definition of the data table 
MySQL 数据 库 中 ， 同 时 为 了 提高 查询 速度 ， 使 字段 名 类 型 字段 说 明 
用 键 值 数 据 库 作 为 高 速 缓存 。MySQL 数据 库 中 timekey int( 11) HT AB 
数据 表 的 定义 如 表 2。 sensorltem varchar( 60) 传感器 名 字 
键 值 数 据 库 是 一 个 Key-Value FRAO , value float 传感器 测量 的 经 过 修 


和 Memcached 类 似 ， 它 支持 存储 的 值 (Value ) 类 正 后 的 气象 因子 值 
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型 相对 更 多 ， 包 括 字符 串 (string) 、 链 表 (list) 、 集 合 (set) 和 有 序 集 合 (zset) 。 键 值 数据 库 的 功能 可 以 
理解 为 一 个 Key-Value 的 数据 结构 操作 ， 数 据 保 存在 内 存 中 定期 刷新 到 磁盘 ， 以 提高 读 写 效 率 。 键 值 
数据 库 通 过 两 种 方式 实现 数据 持久 化 : 使 用 快照 的 方式 将 内 存 中 的 数据 不 断 写 和 磁盘， 将 操作 记录 在 
磁盘 文件 中 。 因 为 需要 在 键 值 数 据 库 执行 范围 查询 ， 使 用 有 序 集合 Sorted Sets 存储 气象 数据 ， 集 合 结 
构 中 使 用 时 间 秒 数 作为 顺序 属性 ， 气 象 数据 的 实际 值 为 其 值 。 而 键 ( Key ) 的 值 为 气象 的 统计 因子 ， 如 
温度 、 湿 度 等 。 比 如 将 2015 年 1 月 29 日 16 时 26 分 05 秒 采集 的 温度 值 17 所存 储 到 键 值 数据 库 的 命 
AH.: redis 127. 0. 0. 1: 6379>zadd iss. temperature 142252110017, 
3.4 拆 分 存储 实例 

在 气象 数据 拆 分 与 归档 的 例子 中 以 测量 室外 温度 的 传感器 iss. temperature 为 例 。 其 它 气象 因子 
数据 的 拆 分 与 归档 和 和 气象 因子 (室外 温度 ) 的 处 理 情况 类 似 。 步 又 如 下 : 

(1) 开始 采 样 时 间 为 2015 年 1 月 29 日 16 时 26 分 05 秒 , 将 该 时 间 转 换 成 1970 年 以 来 的 时 间 秒 
数 ， 为 1422521100。 

(2) 向 Vantage Pro 发 送 “LOOP 1” 命 令 ， 请 求 一 个 99 字 节 的 数据 包 。 接 收 端 到 气象 站 响应 的 数 
据 包 ， 数 据 包 的 内 容 如 图 4。 
4c 4f 4f 14 00 30 09 Oe 64 50 00 41 1d 00 00 00 26 00 ff ff ff ff ff ff ff 7b 7a 7d 7e 7b 7a ff ff 
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图 4 数据 包 


Fig.4 Entries in the packet 


= (3) 传感器 iss. temperature 的 读 取 器 从 数据 包 中 偏 移 量 为 12 的 位 置 读 取 2 个 字 节 ， 其 十 六 进 制 值 
为 00 1d。 读 取 器 对 象 将 00 1d 转换 成 十 进 制 的 29, 
(4) 传 感 融 iss. temperature 的 修正 锅 将 传感器 的 29F 修正 为 2. 900000F， 然 后 再 将 2. 900000F 转换 
= 成 -16. 166 667 CC 。( 温 度 传 感 带 记 录 的 测量 值 是 实际 测量 值 的 10 倍 ， 甚 它 值 的 倍数 详 见 表 1) 

(5) 传感器 iss. temperature 的 记录 器 将 -16. 166 667 更 新 到 记录 器 对 象 中 。 

(6) 将 传感器 的 值 归档 到 MySQL 和 键 值 数据 库 中 。 

(7) 更 新 下 一 次 采用 时 间 ， 循 环 步骤 (1) ~(7) 。 


= 4 气象 数据 应 用 


n 4.1 气象 数据 服务 

数据 处 理 过 程 中 ,在 生成 UVFITS FITS-IDI 等 格式 中 ， 有 相应 的 天 气 字 段 需要 填 人 ， 同 时 在 如 
低温 、 暴 雨 、 冰 看 等 恶劣 天 气 状况 对 观测 信号 也 有 一 定 的 误差 影响 ， 因 此 在 数据 处 理 过 程 中 需要 获得 
气象 数据 。 因 数据 量 巨大 ， 数 据 处 理 采用 基于 分 布 式 的 方法 ， 数 据 处 理 程序 分 散在 集群 中 的 多 台 机 器 
上 ， 分 布 式 程序 处 理会 从 多 台 机 器 向 气象 服务 发 送气 象 数据 查询 的 请 求 ， 所 以 并 发 要 求 高 ， 因 此 需要 
为 数据 处 理 程 序 构建 高 并 发 气象 数据 服务 。 选 择 使 用 ZeroMQ 编写 气象 数据 服务 "" ，ZeroMQ 不 是 
如 其 名 所 示 的 是 一 个 消息 队列 ， 它 更 像 一 个 面向 消息 的 中 间 件 或 者 网 络 通信 程序 库 ， 提 供 了 多 种 语言 
的 应 用 程序 编程 接口 和 跨越 多 种 传输 协议 (甚至 包括 了 进程 间 和 进程 内 的 通信 ) 的 套 接 字 。 同 时 为 了 
满足 高 并 发 高 速 查询 的 要 求 ， 使 用 数据 合并 和 缓存 方式 进一步 提高 数据 查询 效率 。 
4.2 数据 合并 

一 般 情 况 下 将 采集 的 气象 数据 处 理 成 特定 格式 后 直接 追加 到 数据 库 中 ， 然 而 随 着 时 间 的 积累 ， 数 
据 库 中 的 记录 数 会 急剧 增加 。 相 应 地 检索 某 一 个 时 间 段 的 天 气 状 态 所 需 的 时 间 也 会 增加 ， 不 能 满足 高 
效 数 据 处 理 的 要 求 。 由 于 连续 时 间 段 的 天 气 状 态 可 能 相同 ， 例 如 在 2014-6-6 10:00:00 到 2014-6-6 
10:00:59 这 一 分 钟 采集 的 天 气 状态 为 晴天 ， 而 在 接 下 来 的 59 分 钟 的 时 间 内 采集 的 天 气 状态 都 为 晴 
天 。 通 常情 况 下 是 将 这 60 条 记录 全 部 存储 到 数据 库 中 ， 然 而 改进 的 归档 方法 是 合并 这 60 条 记录 为 一 
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条 记录 。 当 检索 落 在 这 一 合并 后 的 时 间 段 天 气 状态 时 ， 仍 然 可 以 检索 到 要 检索 时 间 段 的 天 气 状态 为 晴 
天 ， 这 样 做 和 从 60 条 记录 中 检索 到 的 天 气 状 态 一 样 都 是 晴天 ， 保 证 了 合并 后 的 数据 仍然 是 有 效 的 。 
如 果 一 天 要 归档 的 所 有 采集 的 天 气 状 态 都 一 样 ， 那 么 采用 合并 方法 ， 数 据 库 中 存储 一 条 记录 就 可 以 记 
录 这 一 天 的 天 气 状态 。 但 是 如 果 采 用 传统 的 数据 归档 方式 ， 记 录 一 天 的 天 气 状态 就 需要 24x60 条 ， 
这 样 不 仅 浪费 存储 空间 ， 同 时 影响 检索 效率 。 

4.3 快速 检索 

数据 合并 一 定 程 度 上 可 以 加 快 检 索 速度 ， 但 对 于 有 具体 值 的 气象 采集 因子 ， 如 需要 在 每 个 UVFITS 
文件 中 存储 的 温度 、 湿 度 值 ， 无 法 采用 数据 合并 ， 数 据 量 仍 非常 大 。 为 了 进一步 提高 查询 速度 ， 使 用 
键 值 数据 库 作 为 高 速 缓存 。 数 据 查询 时 首先 访问 键 值 数据 库 ， 只 有 当 键 值 数据 库 访 问 失败 时 或 者 在 键 
值 数据 库 中 找 不 到 数据 时 才 访 问 MySQL， 并 将 从 MySQL 获得 的 数据 更 新 到 键 值 数据 库 中 。 

最 常用 的 气象 数据 查询 模式 是 根据 观察 时 间 查 询 气 象 数据 ， 因 此 使 用 有 序 集合 Sorted Set，Sorted 
Set 是 集合 的 一 个 升级 版 本 ， 它 在 集合 的 基础 上 增加 了 一 个 顺序 属性 ， 这 一 属性 在 添加 修改 元 素 的 时 
候 可 以 指定 ， 每 次 指定 后 ， 有 序 集合 会 自动 重新 按 新 的 值 调整 顺序 。 可 以 理解 为 有 两 列 的 MySQL K, 
一 列 存 储 具体 的 值 ， 一 列 存 顺序 ， 也 就 是 气象 数据 的 时 间 。 操 作 中 key 理解 为 有 序 集合 的 名 字 。 查 询 
时 根据 观察 时 间 和 气象 因子 可 以 获得 该 时 刻 的 具体 气象 数据 。 比 如 查询 时 间 2015 年 1 月 29 日 16 时 
26 分 05 秒 的 温度 值 ， 首 先 将 该 时 间 转 换 成 1970 年 以 来 的 时 间 秒 数 ， 为 1422521100, ， 在 键 值 数 据 库 
上 执行 如 下 查询 命令 : 

redis 127. 0. 0. 1 : 6379>zrangebyscore temperature 1422521100+inf LIMIT 0 1 

这 条 命令 的 意思 是 在 键 值 为 temperature 的 Sorted Sets 中 查找 大 于 时 间 点 1422521100 的 第 1 个 值 。 
+inf 在 键 值 数据 库 中 表示 正 无 穷 大 。 


5 结 论 


本 文 首 先 介绍 了 明 安 图 射电 频谱 日 像 仪 的 基本 情况 ， 并 对 项 目 中 气象 条 件 的 可 能 应 用 场景 和 气象 
条 件 对 观测 数据 有 效 性 可 能 造成 的 影响 进行 了 论述 。 简 要 介绍 了 Vantage Pro 气象 站 的 基本 工作 原理 ， 
数据 交换 格式 以 及 串 行 通信 协议 。 设 计 并 实现 了 和 气象 数据 的 实时 采集 数据 归档 、 合 并 和 快速 索引 方 
法 。 本 文 介绍 的 Vantage Pro 气象 站 的 气象 数据 采集 、 存 储 及 快速 查询 的 优化 方法 对 观测 数据 的 处 理 
有 重要 的 支撑 作用 ， 同 时 也 可 应 用 于 望远镜 选 址 中 气象 条 件 的 自动 监测 。 本 文 虽然 提 到 了 气象 数据 的 
合并 方法 ， 但 是 具体 的 气象 条 件 状 态 值 的 确定 需要 统计 分 析 气 象 数据 对 观测 数据 的 影响 后 得 出 。 因 此 
未 来 将 进行 大 量 统计 分 析 以 评估 气象 数据 对 观测 数据 的 可 能 影响 ， 完 善 归并 方法 。 
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Abstract: MUSER (Mingantu Ultrawide SpEctral Radio Heliograph) is prepared to enter a routine observation 
phase after completions of the hardware installation and adjustment. So as to improve the availability of the 
observation data, the project team purchased the Vantage Pro weather stations for the real-time monitoring of 
meteorological conditions. This paper first introduces the background of MUSER and the basic situation, and 
discusses application scenarios and the impact on data processing of meteorological conditions. We give the 
detailed description of the data collection format, data exchange format and serial communication protocol for 
the Vantage Pro weather station. We also address the meteorological data collection techniques. Finally, we 
give the methods of building meteorological data service, archiving and efficient querying using the Redis. The 
work discussed in this paper can be applied to the automatic weather monitoring and data processing for 
telescopes. It also can provide a valuable reference for the modern astronomical site testing in aspect of the 
automatic weather monitoring. 
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